eval_batch_size:13107200, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0551    recall@10 : 0.092    recall@20 : 0.1451    recall@50 : 0.2472    mrr@5 : (0.054+0j)    mrr@10 : (0.0616+0j)    mrr@20 : (0.0666+0j)    mrr@50 : (0.0708+0j)    ndcg@5 : (0.044+0j)    ndcg@10 : (0.0561+0j)    ndcg@20 : (0.0708+0j)    ndcg@50 : (0.094+0j)    hit@5 : 0.098    hit@10 : 0.1562    hit@20 : 0.229    hit@50 : 0.363    precision@5 : 0.0216    precision@10 : 0.0182    precision@20 : 0.0145    precision@50 : 0.0103
Test result:
recall@5 : 0.0591    recall@10 : 0.0953    recall@20 : 0.1425    recall@50 : 0.2447    mrr@5 : (0.0574+0j)    mrr@10 : (0.0647+0j)    mrr@20 : (0.0694+0j)    mrr@50 : (0.0736+0j)    ndcg@5 : (0.0473+0j)    ndcg@10 : (0.0588+0j)    ndcg@20 : (0.0717+0j)    ndcg@50 : (0.0949+0j)    hit@5 : 0.1045    hit@10 : 0.1601    hit@20 : 0.2301    hit@50 : 0.3641    precision@5 : 0.0238    precision@10 : 0.0193    precision@20 : 0.0149    precision@50 : 0.0105

eval_batch_size:13107200, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0669    recall@10 : 0.1086    recall@20 : 0.1665    recall@50 : 0.2777    mrr@5 : (0.0632+0j)    mrr@10 : (0.0714+0j)    mrr@20 : (0.0769+0j)    mrr@50 : (0.0813+0j)    ndcg@5 : (0.0524+0j)    ndcg@10 : (0.0659+0j)    ndcg@20 : (0.082+0j)    ndcg@50 : (0.1073+0j)    hit@5 : 0.1166    hit@10 : 0.179    hit@20 : 0.2591    hit@50 : 0.4    precision@5 : 0.026    precision@10 : 0.0211    precision@20 : 0.0167    precision@50 : 0.0115
Test result:
recall@5 : 0.0684    recall@10 : 0.1103    recall@20 : 0.1663    recall@50 : 0.2722    mrr@5 : (0.0646+0j)    mrr@10 : (0.073+0j)    mrr@20 : (0.0784+0j)    mrr@50 : (0.0827+0j)    ndcg@5 : (0.0547+0j)    ndcg@10 : (0.0681+0j)    ndcg@20 : (0.0836+0j)    ndcg@50 : (0.1077+0j)    hit@5 : 0.1158    hit@10 : 0.1794    hit@20 : 0.2588    hit@50 : 0.3939    precision@5 : 0.0267    precision@10 : 0.0219    precision@20 : 0.0172    precision@50 : 0.0117

eval_batch_size:13107200, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0685    recall@10 : 0.1101    recall@20 : 0.1688    recall@50 : 0.2762    mrr@5 : (0.0642+0j)    mrr@10 : (0.0726+0j)    mrr@20 : (0.0782+0j)    mrr@50 : (0.0825+0j)    ndcg@5 : (0.0536+0j)    ndcg@10 : (0.0673+0j)    ndcg@20 : (0.0836+0j)    ndcg@50 : (0.108+0j)    hit@5 : 0.1161    hit@10 : 0.1788    hit@20 : 0.2605    hit@50 : 0.3969    precision@5 : 0.0258    precision@10 : 0.021    precision@20 : 0.0166    precision@50 : 0.0114
Test result:
recall@5 : 0.0709    recall@10 : 0.1106    recall@20 : 0.1676    recall@50 : 0.2721    mrr@5 : (0.0667+0j)    mrr@10 : (0.0747+0j)    mrr@20 : (0.0801+0j)    mrr@50 : (0.0844+0j)    ndcg@5 : (0.0561+0j)    ndcg@10 : (0.069+0j)    ndcg@20 : (0.0845+0j)    ndcg@50 : (0.1084+0j)    hit@5 : 0.1193    hit@10 : 0.1798    hit@20 : 0.2595    hit@50 : 0.3937    precision@5 : 0.0271    precision@10 : 0.022    precision@20 : 0.0169    precision@50 : 0.0116

eval_batch_size:13107200, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0547    recall@10 : 0.0909    recall@20 : 0.1433    recall@50 : 0.2456    mrr@5 : (0.0521+0j)    mrr@10 : (0.0595+0j)    mrr@20 : (0.0647+0j)    mrr@50 : (0.0688+0j)    ndcg@5 : (0.043+0j)    ndcg@10 : (0.0548+0j)    ndcg@20 : (0.0694+0j)    ndcg@50 : (0.0926+0j)    hit@5 : 0.0967    hit@10 : 0.1533    hit@20 : 0.2285    hit@50 : 0.3608    precision@5 : 0.0214    precision@10 : 0.018    precision@20 : 0.0145    precision@50 : 0.0102
Test result:
recall@5 : 0.0572    recall@10 : 0.091    recall@20 : 0.1402    recall@50 : 0.2424    mrr@5 : (0.0555+0j)    mrr@10 : (0.0624+0j)    mrr@20 : (0.0673+0j)    mrr@50 : (0.0716+0j)    ndcg@5 : (0.0459+0j)    ndcg@10 : (0.0566+0j)    ndcg@20 : (0.0699+0j)    ndcg@50 : (0.0932+0j)    hit@5 : 0.1022    hit@10 : 0.1541    hit@20 : 0.2264    hit@50 : 0.3607    precision@5 : 0.0233    precision@10 : 0.0187    precision@20 : 0.0146    precision@50 : 0.0104